鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程软考华为认证厂商认证 IT技术 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

数据库与缓存不一致，你会怎么办？

缓存与数据库数据不一致，根本上是由数据库主从不一致引起的。当主库上发生写操作之后，从库binlog同步的时间间隔内，读请求，可能导致有旧数据入缓存。

2025-04-08 09:00:00

数据库缓存架构

一文搞懂 MySQL InnoDB架构 Buffer Pool、Change Buffer、自适应哈希索引、Log Buffer

Buffer Pool 是主内存中的一个区域，它在访问时缓存表和索引数据。Buffer Pool 允许频繁使用的数据直接从内存中访问，从而加快处理速度。

2025-04-08 08:20:00

MySQL 架构 InnoDB

FastAPI 响应模型：Pydantic 的数据验证与转换，一篇吃透！

response_model 是 FastAPI 最强大功能之一，搭配 Pydantic 使用，可以动校验、转换、过滤、文档全搞定！

2025-04-08 08:15:00

FastAPI 响应模型数据库

国产集中式数据库对象评测 — 索引原创

索引能否发挥更大作用，取决于优化器能能否充分地利用索引。这里有一些常见的优化手段，包括索引覆盖扫描、索引条件下推、索引跳跃扫描等等。这里稍微吐槽下，国内数据库这部分介绍的不多，搜索也得不到有用的信息，因此可能信息不够完整。

2025-04-08 07:30:40

数据库对象索引

国产数据库与Oracle数据库事务差异分析

数据库中的ACID是事务的基本特性，而在Oracle等数据库迁移到国产数据库国产中，可能因为不同数据库事务处理机制的不同，在迁移后的业务逻辑处理上存在差异。

2025-04-08 06:00:00

数据库 Oracle 处理机制

Entity Framework性能翻车？手写SQL不如试试这三招！

我们能够有效地提升Entity Framework的性能，避免出现“性能翻车”的情况。在大多数场景下，这些优化技巧能够让EF在性能上与手写SQL相媲美，甚至在某些复杂业务逻辑场景中更具优势。开发者们可以根据实际项目需求，灵活运用这些技巧，打造高性能的.NET应用程序。

2025-04-08 01:00:00

Entity SQL 开发

重生之 MySQL B+Tree 提前问世二十年，MySQL之父叫我师父

B+树把磁盘的物理运动，变成了内存的闪电舞蹈！"——当日登上《程序员》杂志封面。三月后，林渊成立"深空科技"，发布"伏羲 B+引擎"。

2025-04-07 08:30:04

MySQL B+Tree ID 字段

常见SQL慢查询问题及解决方法

SQL 慢查询问题的排查和解决需要综合考虑多个方面，包括索引的使用、查询语句的编写、表的关联方式以及数据库的配置等。通过对常见问题的分析和针对性的解决方法，可以有效地提高数据库查询的性能，提升系统的整体运行效率。

2025-04-07 07:20:35

SQL 慢查询性能

镜像漏洞清零计划：Trivy + 自动化修复流水线实战

本文将深入探讨镜像漏洞的全生命周期管理，覆盖精准检测、分级修复、运行时防护，并提供可直接落地的代码和架构设计。

2025-04-07 04:21:00

镜像漏洞流水线

MySQL 8.0 INSTANT DDL 算法原理简析

MySQL 8.0 中引入 INSTANT DDL，极大提高了 DDL 的执行效率，具体原理简单说就是仅修改元数据，不修改现有行的物理结构，显然这样会导致数据与表结构不一致，这个问题是怎么解决的呢？本文将简单分析这个问题，并先回顾 online DDL。

2025-04-07 03:00:00

MySQL DDL online

面试官：说说MySQL主从复制实现原理？

MySQL 主从复制用于多个数据库服务器之间的数据同步，它可以提供高可用性、提高数据库整体性能和吞吐量，以及可以进行数据备份和数据库恢复。

2025-04-07 00:00:00

MySQL 数据库服务器

RAG实战 | 向量数据库LanceDB指南

LanceDB是一个开源的用 Rust 实现的向量数据库。向量搜索是一种在高维空间中搜索向量的方法，主要是将原始数据通过嵌入模型得到向量，然后通过向量相似度算法计算向量之间的距离，从而找到最相似的向量。

2025-04-03 16:02:14

RAG 向量数据库 LanceDB

为什么AI需要向量数据库？

大模型遇到了严峻瓶颈。参数膨胀效益递减，幻觉问题依旧。在这关键节点，有个核心技术正在成为破局者——向量数据库。

2025-04-03 11:04:40

AI 向量数据库大模型

Redis 三主三从高可用集群部署全过程详解

在每台主机上运行两个 Redis 实例，需要为每个实例创建独立的配置文件和数据目录。

2025-04-03 11:00:00

Redis 集群数据库

一文读懂 Apache Doris

海量数据如同洪水般涌来，传统数据库却无力应对？当分析查询需求日益增长，普通数据库却只能提供龟速的响应时间？当业务决策需要实时洞察，而系统返回的只有超时提示？这正是Apache Doris要解决的核心问题。

2025-04-03 10:56:47

数据库数据分析

MySQL 主从，一定会不一致！

今天聊聊数据库主库与从库的一致性问题，以及数据库主从不一致时的四种常见优化方案。

2025-04-03 09:51:37

MySQL 数据库架构

震惊！用 Redis+AI 模型实现秒级实时风控，这波操作太秀了

兄弟们，有没有遇到过这种情况：凌晨三点在某东抢购显卡，刚提交订单就提示"系统繁忙"，转头发现黄牛已经在海鲜市场挂出同款；扫码支付时突然弹出风险提示，非要验证人脸识别；更绝的是某银行APP，刚输完密码就收到短信提醒："检测到您的账户存在异常操作"——但此时您根本没动过手机。

2025-04-03 09:30:56

Redis AI 模型

活动中台系统慢 SQL 治理实践

活动中台系统作为中台项目非常注重系统性能和用户体验，数据库系统性能问题会对应用程序的性能和用户体验产生负面影响。慢查询可能导致应用程序响应变慢、请求堆积、系统负载增加等问题，甚至引发系统崩溃或不可用的情况，因此，需要在数据库系统中针对执行缓慢的SQL查询进行优化和改进。

2025-04-03 09:00:00

慢SQL 数据库

行转列不再复杂：SQL高手都在用的技巧揭秘

将冗长的纵向数据“压缩”为横向结构，让分析更高效。本文将通过实战案例，手把手教你掌握 SQL 中行转列的3 种核心方法，并揭示高手的隐藏技巧。

2025-04-03 08:00:51

SQL 原始数据结构

Elasticsearch深度分页全解：从原理到跳页实战

在数据爆炸的时代，分页查询已成为系统标配功能。但当面对亿级数据量时，传统的分页方式却可能成为压垮系统的最后一根稻草。本文将深入剖析Elasticsearch深度分页的成因，并提供常见的解决方案.

2025-04-03 00:03:00

数据内存网络

五分钟快速部署 MySQL：二进制方式

本篇文章我们将分享关于 MySQL 五种部署方式中的二进制部署。下面，我们一起来看。

2025-04-02 11:30:00

MySQL 二进制部署数据库

IvorySQL：兼容Oracle数据库的开源PostgreSQL

今天给大家介绍一款基于 PostgreSQL 开发、兼容 Oracle 数据库的国产开源关系型数据库管理系统：IvorySQL。

2025-04-02 08:30:00

IvorySQL Oracle PostgreSQL

CTO 问我，为什么不按照教材上的 3NF 来设计数据库？

数据冗余在大数据量与高并发量的数据库设计中使用极其广泛，今天重点讲讲冗余表的设计。

2025-04-02 08:05:00

数据库 3NF 数据冗余

阿里面试：MySQL乐观锁是什么？底层实现原理？

MySQL的乐观锁通过版本号或时间戳机制实现，其核心原理：是在更新数据时检查数据是否被其他事务修改，从而避免并发冲突。

2025-04-02 01:22:44

MySQL 乐观锁数据

重生之 MySQL 索引失效六大陷阱

书接上回，林渊盯着监控屏上跳动的QPS 18500，突然发现商品搜索接口的Handler_read_next计数器每秒暴涨百万次。" 这是全表扫描的死亡信号！"他抓起对讲机："立刻降级推荐系统！"

2025-04-02 00:00:04

MySQL 索引失效

SpringAI用嵌入模型操作向量数据库！

嵌入模型和向量数据库是实现 RAG（检索增强生成）的技术基础，当然除了以上案例外，你可以使用 Redis 或 ES 来存储向量数据，并尝试加入 DeepSeek 实现 RAG 功能，这种形式更符合企业真实的技术应用。

2025-04-02 00:00:00

向量数据库嵌入模型 RAG

关于分库分表，你知道多少？

本质上分库分表是三个概念，这里我们都是从水平拓展的维度讨论问题，本质上分库分表中的概念分别对应：分库、分表和分库分表。

2025-04-01 08:45:00

分库分表数据库 MySQL

RAG知识库的数据方案：图数据库、向量数据库和知识图谱怎么选？

想解决一个困扰企业多年的问题：如何让员工快速找到所需信息？检索增强生成（RAG）技术有望成为解决这一难题的关键，但如何选择最合适的数据存储方案？向量数据库？图数据库？还是知识图谱？让我们一探究竟。

2025-04-01 07:30:00

RAG 图数据库向量数据库

三分钟掌握MySQL是如何存储一行记录

Mysql的数据是保存在磁盘上，数据具体保存在磁盘的哪个文件上是由存储引擎决定的，Mysql支持多种存储引擎（如InnoDB、MyISAM等），不同的存储引擎保存的文件也存在一定的差异。

2025-04-01 01:25:00

MySQL InnoDB MyISAM

Redis集群全解析：从原理到实战，如何构建高可用分布式缓存

Redis集群是应对高并发、大数据的利器，但“没有银弹”——需根据业务特点选择方案。对于大多数企业，Redis Cluster是平衡性能与扩展性的最优解。如果你还在为单机Redis的性能焦虑，不妨从搭建一个3主3从的集群开始，迈向分布式缓存的新世界！

2025-04-01 01:04:00

Redis 集群缓存

MySQL 主从集群 + mycat 双节点 + Keepalived 读写分离高可用方案

今天分享一下读写分离使用 MyCAT 版本来实现 MySQL 主从集群与 MyCAT 双节点部署，并结合 Keepalived 实现高可用的完整解决方案。

2025-03-31 10:40:52

MySQL 集群 MyCAT

重生之我用 2025 年的 InnoDB 知识在 2003 年 IT 圈打工

2003 年 12 月 31 日 23:45，北京中关村某电商公司机房。林渊盯着监控屏上疯狂跳动的Table_locks_waited计数器，手指在键盘上悬停。距离新年促销只剩 15 分钟，MyISAM 表锁导致的雪崩效应正在蔓延。

2025-03-31 08:31:15

IT InnoDB 计数器

从日志到表格，不用导入数据库就能用 SQL 查询

dsq 是 DataStation（一个图形界面工具）的命令行伴侣，二者共享底层技术栈，但 dsq 专注于命令行用户，提供轻量、快速的数据分析能力。

2025-03-31 08:20:00

SQL 查询数据库 dsq

生产环境CPU狂飙900%，到底该如何处理？

大家在使用MySQL过程，想必都有遇到过CPU突然过高，或者达到200%以上的情况。数据库执行查询或数据修改操作时，系统需要消耗大量的CPU资源维护从存储系统、内存数据中的一致性。

2025-03-31 08:04:50

MySQL CPU 内存

千万级的大表，如何做性能优化？

很多小伙伴的数据库在刚开始的时候表现良好，查询也很流畅，但一旦表中的数据量上了千万级，性能问题就开始浮现：查询慢、写入卡、分页拖沓、甚至偶尔直接宕机。

2025-03-31 01:55:00

千万级性能优化

MySQL：MyISAM锁表致千万损失！穿越工程师如何逆天改命

本章技术要点总结：1. MyISAM 锁机制：表级锁导致并发灾难，SHOW STATUS LIKE 'Table_locks%'监控锁争用；2. 崩溃恢复缺陷：断电可能导致索引/数据不一致，需定期执行REPAIR TABLE；3. 性能优化方向：通过myisamchk --analyze优化索引统计信息；4. 历史价值：MyISAM 在 GIS 和全文索引领域仍具参考价值。

2025-03-31 00:00:01

QPS MySQL MyISAM

MySQL MyISAM引擎是什么？有什么致命缺陷？为何现在都不使用了？

"当我启动 InnoDB 引擎时，服务器内存突然耗尽..." —— 林渊如何用 Buffer Pool 优化化解内存危机？

2025-03-31 00:00:00

InnoDB 引擎优化

来聊聊大厂常用的分布式 ID 生成方案

本文就基于保证数据ID唯一的要求针对市面主流的几种分布式ID算法的特点和适用场景展开深入探讨。

2025-03-28 10:27:29

分布式ID 分库分表算法

国产数据库“AI助手”能力如何原创

从各家反馈来看，整体效果还是不错的。做的比较好的，可以提供较为完善的信息（包括步骤、示例），也都提供了信息的来源方便检索纠错。

2025-03-28 07:33:09

数据库 AI助手设计

Elasticsearch实战指南：让你的业务搜索飞起来

当你的MySQL数据库查询突然从0.5秒飙升到15秒，当你的产品经理第20次提出"模糊搜索要支持同义词联想"时——是时候重新认识这个改变搜索游戏规则的分布式搜索引擎了。

2025-03-28 03:20:00

MySQL 数据库搜索

PgDog：一个PostgreSQL分布式集群中间件

PgDog 是一个实现了 PostgreSQL 分片、连接池以及负载均衡功能的中间。PgDog 使用 Rust 语言编写，支持跨平台（Linux、Mac OS、Windows），具有高性能和高可靠性，可以在不需要修改任何应用程序的前提下实现 PostgreSQL 数据库的水平扩展。

2025-03-27 11:03:18

PostgreSQL PgDog 分布式集群

深度剖析 StarRocks 读取 ORC 加密文件背后的技术

本文介绍了StarRocks数据库如何读取ORC加密文件，包括基础概念以及具体实现方案。深入探讨了利用ORC文件的四层结构和三层索引机制，实现高效查询加密数据。希望通过本文对ORC加密文件读取功能的实现细节的剖析，让读者更加深刻理解ORC文件，同时了解StarRocks支持加解密数据分析的方案。

2025-03-27 09:58:50

StarRocks 数据库

国产集中式数据库对象评测 — 表原创

针对国产集中式数据库的 SQL 能力，做了一系列的评测工作，通过多篇文章分享，受到了业内的广泛关注。这里紧接着上一话题重新开辟一个系列，从另一个维度-对象，来评估下各厂商产品针对数据对象的支持能力如何。

2025-03-27 07:30:28

集中式数据库 SQL

MySQL悲观锁是什么？底层实现原理？

在 MySQL 中悲观锁（Pessimistic Lock），是一种并发控制机制，用于防止多个事务同时修改同一条数据，从而确保数据一致性。基于“悲观”的假设，认为在多用户环境下，数据被多个事务同时访问、或修改的冲突概率较高。

2025-03-27 04:00:00

MySQL 悲观锁事务

"慢SQL"治理的几点思考

如果SQL没有问题，那么关注点可以放在mysql实例的资源开销上了。因为造成慢查询的原因不单只是SQL本身，有可能是磁盘负载，CPU以及网络等方面的资源不足引起了。

2025-03-27 03:22:00

SQL 缓存 mysql

Go语言中Redis管道的性能潜力

Redis管道技术为高并发场景下的性能优化提供了有效手段，但需要开发者深入理解其实现原理和适用边界。通过合理控制批处理规模、优化命令组合方式，并配合完善的监控体系，可以在保证系统稳定性的前提下充分发挥Redis的性能潜力。

2025-03-27 00:45:00

Redis QPS 场景

Redis 核心知识点深度剖析：原理、机制与应用

本文将深入探讨Redis的核心知识点，带你领略其内部的奥秘，助力你在数据处理的领域中如鱼得水。

2025-03-26 11:30:40

Redis 数据处理数据库

SpringBoot与Jasypt整合，实现数据库字段自动加密解密功能

使用Jasypt可以显著提升应用程序的数据安全性，简化加密操作，并提供灵活的配置选项。不仅有助于满足各种法规要求，还能提高开发效率和系统的整体稳定性。

2025-03-26 08:43:17

Jasypt 数据库配置

面试官：MySQL优化手段有哪些？

MySQL 常见的优化手段包含 5 大类，索引优化、SQL 优化、事务和锁优化、架构优化和硬件及配置优化。你还知道哪些优化手段呢？

2025-03-26 01:25:00

MySQL 优化事务

Apache Hive：基于Hadoop的分布式数据仓库

Apache Hive 是一个基于 Apache Hadoop 构建的开源分布式数据仓库系统，支持使用 SQL 执行 PB 级大规模数据分析与查询。

2025-03-25 10:49:24

分布式数据仓库 Hadoop SQL

1 2 3 4 5 6 ··· 337 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营